Desafios à Gestão do Desempenho: análise lógica de uma Política de Avaliação na Vigilância em Saúde / Challenges to Performance Management: logical analysis of an Evaluation Policy in Health Surveillance

Resumo Reconhecer as contribuições da área de avaliação no suporte ao desempenho das políticas de saúde, é admiti-la de forma contínua e permanente no contexto da gestão. Isso requer um conjunto de procedimentos, para além das práticas de monitoramento e avaliação, denominado gestão do desempenho. O objetivo desse estudo foi analisar a lógica da Política de Avaliação da Vigilância em Saúde (VS) de Pernambuco, comparando-a com a Política canadense correspondente. Para tal, foi realizado um estudo qualitativo, análise lógica da teoria do programa, utilizando-se como ferramenta o desenho do modelo lógico da gestão do desempenho, e sua respectiva matriz de análise e julgamento com os critérios a serem avaliados. Na VS, foram entrevistados 9 informantes-chave e analisados documentos; o modelo canadense foi analisado com base em um documento produzido por Lahey (2010). As duas políticas estudadas são convergentes, possuindo os elementos necessários à gestão do desempenho. Porém, enquanto a avaliação teve destaque no modelo canadense, o monitoramento constituiu-se o eixo condutor da institucionalização das práticas avaliativas na VS. Algumas lições aprendidas no modelo canadense podem ser recomendadas, como o desenvolvimento de um plano de avaliação, pautado no nível estratégico e decisor da VS.

Abstract Acknowledging the contributions of the assessment area in supporting the performance of health policies, is to admit it in an ongoing and permanent way in the management context. This requires a set of procedures that go beyond monitoring and evaluation practices, known as performance management. The goal of this study was to analyze the logic of the Health Surveillance (HS) Evaluation Policy of Pernambuco, comparing it with the corresponding Canadian policy. For this purpose, a qualitative study of logical analysis of the program theory was carried out, using as a tool the design of the logical model of performance management and its respective matrix of analysis and judgment with the criteria to be evaluated. In HS, 9 key-informants were interviewed, and documents were analyzed; the Canadian model was analyzed based on a paper written by Lahey (2010). Both policies analyzed by this study are convergent and have the necessary elements for performance management. While the evaluation featured largely in the Canadian model, monitoring was the driving force behind the institutionalization of assessment practices in HS. Some lessons learned in the Canadian model can be recommended, such as the development of an assessment plan, based on the strategic and decision-making level of HS.

Translação do Conhecimento na qualificação da gestão da Vigilância em Saúde: contribuição dos estudos avaliativos de pós-graduação / Knowledge Translation in qualification of Health Surveillance management: contribution of postgraduate evaluative studies

Resumo São muitos os desafios no sentido de minimizar as lacunas existentes entre evidências científicas e melhores resultados de saúde. A translação do conhecimento (TC) é o movimento que o conhecimento faz em um contexto organizacional em prol da sua efetiva aplicação. O objetivo deste estudo foi analisar a ocorrência da TC na Secretaria Executiva de Vigilância em Saúde de Pernambuco (SEVS/PE), tomando como objeto dez pesquisas avaliativas sobre programas da Vigilância em Saúde, produzidas no Mestrado de Avaliação em Saúde do Instituto de Medicina Integral Prof. Fernando Figueira, de 2011 a 2015. Para tanto, utilizou-se um roteiro de entrevista semiestruturada, abordando sete gestores e dez técnicos da SEVS-PE. Na análise deste estudo de caso, qualitativo, foi utilizado um modelo de TC, e sobrepondo-se a ele, uma estrutura teórica de uso-influência da avaliação. Em oito pesquisas analisadas, foram categorizadas evidências em cinco fases da TC. Apenas a etapa de avaliação do uso do conhecimento não foi evidenciada. Diferentes tipos de uso, dimensões e níveis de influência das avaliações foram relatados. Dentre as mudanças ocorridas, foram relatadas: criação de novas agendas, elaboração de protocolos, mudança do processo de trabalho, instituição de novos fluxos, contratação de novos profissionais.

Abstract There are many challenges in minimizing the gaps between scientific evidence and better health outcomes. The translation of knowledge (TC) is the movement that knowledge makes in an organizational context in favor of its effective application. This study aimed to analyze the occurrence of CT in the Executive Secretariat of Health Surveillance of Pernambuco (SEVS / PE), focusing on 10 evaluative surveys on Health Surveillance programs, produced in the Master's Degree in Health Evaluation of the Institute of Comprehensive Medicine Prof. Fernando Figueira, from 2011 to 2015. For this purpose, a semi-structured interview script was used, addressing 7 managers and 10 SEVS-PE technicians. In the analysis of this qualitative case study, a CT model was used, and overlapping it, a theoretical structure of use-influence of the evaluation. In eight studies analyzed, evidence was categorized into five phases of CT. Only the evaluation stage of the use of knowledge was not evidenced. Different types of use, dimensions and influence levels of the evaluations were reported. Among the changes occurred, the following were reported: creation of new agendas, elaboration of protocols, change of work process, creation of new flows, hiring of new professionals.

Avaliação da completitude das variáveis da declaração de óbitos de menores de um ano residentes em Pernambuco, 1997-2005 / Completeness variable evaluation from death certificate of children less than one year in Pernambuco State, 1997-2005

Com o objetivo de avaliar a completitude das variáveis da declaração de óbito de menores de um ano residentes em Pernambuco, foi realizado um estudo avaliativo, descritivo de série temporal. A população do estudo foi composta pelo total de óbitos de menores de um ano residentes em Pernambuco, no período de 1997 a 2005, contidos na base de dados do Sistema de Informações sobre Mortalidade, disponibilizados pelo departamento de informática do SUS (DATASUS). Foi calculada a incompletude (branco/ignorado) de cada variável segundo município de residência. Com base nesses dados, foi calculado o percentual de municípios com preenchimento excelente (>95 por cento) e o qui-quadrado de tendência (p>95 por cento). Observou-se um comportamento diferenciado no preenchimento das variáveis da declaração de óbito. Enquanto as variáveis sexo, idade, raça/cor, local de ocorrência, tipo de parto e semanas de gestação apresentaram um incremento no percentual de municípios com preenchimento excelente, as variáveis óbito confirmado por necropsia, realização de cirurgia, exame complementar e assistência médica apresentaram um decréscimo. Ressalta-se a necessidade da adoção de medidas educativas e um maior controle no preenchimento da declaração de óbito.

An evaluative, descriptive, time series study was conducted to evaluate the completeness of variables from death certificate. The study population consisted of all deaths of children less than one year old living in Pernambuco State, Brazil, from 1997 to 2005, contained in the database of the Mortality Information System (SIM), provided by the Data Processing Department of the Unified Health System (DATASUS). We calculated each variable's incompleteness (blank/unknown data) by municipality of residence. Based on these data, we calculated the percentage of municipalities with excellent completeness (> 95 percent) and the tendency qui-square (p>95 percent). There was a difference in the filling behavior of the variables of the death certificate. While sex, age, race/color, place of occurrence, type of delivery and weeks of gestation had an increase in the percentage of municipalities with excellent filling, death confirmed by autopsy, completion of surgery, complement and medical examination showed a decrease. The study emphasizes the importance of educational actions and a better control in the filling of the variables in death certificates.

Avaliação da completitude das variáveis da Declaração de Nascido Vivo de residentes em Pernambuco, Brasil, 1996 a 2005 / Evaluation of the completeness of variables on Birth Certificates of residents in Pernambuco State, Brazil, 1996 to 2005

Com o objetivo de avaliar a completitude das variáveis da Declaração de Nascido Vivo, foi realizado um estudo avaliativo, descritivo de série temporal. A população de estudo foi composta pelo total de nascidos vivos de residentes de Pernambuco, Brasil, no período de 1996 a 2005, contidos na base de dados do Sistema de Informações sobre Nascidos Vivos (SINASC) disponibilizados pelo Departamento de Informática do SUS (DATASUS). Foi calculada a incompletude de cada variável (branco/ignorado) segundo município de residência. Com base nesses dados, foi calculado o percentual de municípios com preenchimento excelente(> 95 por cento), construído o modelo de regressão linear simples e calculado o coeficiente de determinação. Observou-se incremento importante no percentual de municípios com preenchimento excelente, com destaque para as variáveis: raça/cor, escolaridade materna, estado civil materno e número de consultas pré-natal. Ressalta-se a importância e a pertinência do uso do SINASC na análise das condições de saúde materno-infantil.

An evaluative, descriptive, time series study was conducted to evaluate the completeness of data on certificates of live birth. The study population consisted of all live births of residents in Pernambuco State, Brazil, from 1996 to 2005, contained in the database of the Live Birth Information System (SINASC), provided by the Information Technology Department of the Unified National Health System (DATASUS). We calculated each variable's incompleteness (blank/unknown data) by municipality of residence. Based on these data, we calculated the percentage of municipalities with excellent completeness (> 95 percent), constructed a simple linear regression model, and calculated the determination coefficient. An important increase was observed in the percentage of municipalities with excellent completeness, highlighting the following variables: race/color, maternal schooling, maternal marital status, and number of prenatal visits. The study emphasizes the importance and relevance of using the SINASC database for analyzing maternal and child health conditions.